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Abstract of DE1 01 63967 

The system has a sensor arrangement for detecting a driving situation, a controller (2) and a device for 
detecting a driver's attention state. The controller controls a waming device and/or an actuator for 
intervening in vehicle behavior depending on sensing data and attention state. The attention state 
detector includes vehicle component control elements (5-9); the controller detects the attention state 
from their operation or non-operation. An Independent claim is also included for a method of detecting 
a vehicle driver's attention state. 
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Die folgenden Angaben smd den vom Anmelder eingeraichten Unterlagen entnommen 

(g) Fahrerassistenzsysterh unter Beruckslchtigung des Aufmerksamkeitszustandes eines Kraftfahrzeugfuhrers 

(§) Die Erfindung betrifft ein Fahrerassistenzsystem, um- 
fassend eine Sensorik zur Eifassung einer Fahrsituation, ; 
ein Steuergerat (2) und eine Einnchtung zur Erfassung 
des Aufmerksamkeitszustandes eines Kraftfahrzeugfuh- 
rers, wobei das Steuergerat (2) in Abhangigkeit der Daten 
der Sensorik und der Einrichtung zur Erfassung des Auf- 
. merksamkeitszustandes eines Kraftfahrzeugfuhrers eine 
Wameinrichtung uncl/oder etnen Aktuator zum Eingriff in 
das Fahn^erhalten des Kraftfahrzeuges ansteuert, wobef 
die Einrichtung zur Erfassung des Aufmerksamkeitszu- 
standes des Bedienelementes (&-9) vorhandener Fahr- 
zeugkomponenten umfasst aus deren Betatigung bzw. 
Nichtbetatigung das Steuergerat (2) einen Aufmerksam- 
keitszustand ableitet. 
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Beschreibung 



[0001] Die Erfindung betrifFt ein Fahrerassistenzsystem 
unter Beriicksichtigung des Aufrnerksamkeitszustandes ei- 
ries Kraftfahrzeuges, 

[0002] Der Aufimerksamkeitszustand eines Kraftfahr- 
zeugfiihrers ist eine wichtige EingangsgraBe bei Fahrerassi- 
stenzsystemen, wie beispielsweise einem automadschen 
Notbremssystem oder einer FahrspurkontroUe. Bei einem 
automatischen Notbremssystem wird beispielsweise liber 
eine geeignete Sensorik ein potentielles KoUisions-Objekt 
erfasst: Aus der Entfemung und der Geschwindigkeit wer- 
den dann Ausweichrouten berechnet Reagiert der Fahrer 
aber nicht, so gibt es einen Punkt, an dem eine Kollision un- 
vermeidlich isL In diesem Fall beginnt das automatische 
Notbremssystem mit der Verzogerung des Kraftfahrzeuges. 
Bei der Berechnung der Ausweichroutm bzw. dem Zeit- 
punkt, wo ein Ausweichen nicht mehr moglich ist, sind die 
Reaktionszeiten des Fahrers zu beriicksichtigen. Anschau- 
lich ist bei langeren Reaktionszeiten fniher der Punkt er- 
reicht, wo eine Kollision unvermddlich ist Reaktionszeit 
und Aufinericsamkeit des Fahrers stehen jedoch in direktem 
Zusammenhang, iso dass der Aufmericsamkeitszustand des 
Fahrers eine wichtige EingangsgrdBe darstellt Ahnliche 
tlberiegungen gelten fiir dne FahrspurkontroUe, wo unter- 
schieden werden muss, ob es sich um ein gewoUtes Verlas- 
sen dear Fahrspur ohne gesetzten Fahrtrichtungsanzeiger 
handelt oder um ein Verlassen der Fahrspur aufgrund von 
Unaufmericsamkeit 

[0003] Aus der DE 38 03 916 Al ist ein Verfahren und 
eine Vorrichtung zur Ermittlung der Fahrtauglichkeit eines 
Fahrzeugfiihrers, insbesondere nach langerer Fahrtzeit, 
wShrend der Fahrt beschrieben, bei dem ErmUdung oder 
mangelnde Auteerksamkeit durch Auswerten von Augen^ 
reaktionen auf stimuliearte Reize festgestellt werden. Dabei 
testet eine geeignete Vorrichtung, wie beispielsweise eine 
Kamera, im Blickbereich einer kontroUierten Person deren 
individuelle, momentane Reaktion nach einer Stimulation 
durch Lichtreize. Die Auswertung der Augenreaktionen er- 
folgt mit Hilfe eines adaptiven Computer-Systems, wobei 
als Reaktion der Fahrer optisch oder akustisch gewamt wild 
iind gegebenenf alls in die Motordrosselung oder in die 
Bremse des Fahrzeuges eingegriffen wild, falls der Fahrer 
auf die Wamung nicht reagiert Ober diese Reaktionsprii- 
fung durch statische Stimulation hinaus konnen iiber eine 
Schnittstelle zum Fahrzeug Werte wie Lenkwinkel, ABS, 
Gaspedal, Blinkerbetatigung, Drehzahlmessung, Daten ei- 
nes Abstandswamsystems sowie Beschleunigung und \fer- 
zdgerungen mit der Auswertung der Augenbewegungen 
verknCipft werden und daraus ein Ermtidungs- oder Konditi- 
onszustand abgeleitet werden. Nachteilig an der bekannten 
Vorrichtung ist, dass insbesondere die Kamera mit dem ad- 
aptiven Computersystem technisch sehr aufwendig ist und 
iiber das Versuchsstadium noch nicht hinaus ist 
[0004] Der Erfindung liegt daher das technische Problem 
zugrunde, ein Fahrerassistenzsystem mit einer Einrichtung 
zur Erfassung des Aufrnerksamkeitszustandes eines Kraft- 
fahrzeugfiihrers zu schafEen, das technisch einfach^ zu im- 
plementieren ist sowie ein hieizu geeignetes Verfahren zur 
VerfUgung zu stellen. 

[0005] Die Ldsung des technischen Problems ergibt sich 
durch die Gegenstande mit den Merkmalen der Patentan- 
sprUche 1 und 6. Weitere vorteilhafte Ausgestaltungen der 
Erfindung ergeben sich aus den Unteranspriichen. 
[0006] Hierzu umfasst die Einrichtung zur Erfassung des 
Aufrnerksamkeitszustandes Bedienelemente vorhandener 
Fahrzeugkomponenten, aus deren Bestatigung bzw. Mcht- 
bestatigung das Steu«:gerat des Fahrzeugassistenzsystems 



einen Auftnerksamkeitszustand ableitet Hierdurch kann auf 
teure und technisch aufwendige Sensoriken verzichtet wer- 
den, 

[0007] In einer bevorzugten Ausfiihrungsform sind die 
5 Fahrzeugkomponenten ein Bordcomputer und/oder ein Na- 
vigationssystem und/oder ein Autotelefon und/oder ein In- 
fotainmentsystem und/oder ein Fahrzeugspiegel und/oder 
ein Schiebedach und/oder Pedale fiir Gas, Bremse, Gang. 
Der Grundgedanke dabei ist, dass der Fahrer bei der Betati- 
10 gung von Bedienelementen von Komfortgeraten vom Ver- 
kehrsgeschehen abgelenkt ist. Ebenso kann bei der Verstel- 
lung des AuBen- oder Riickspiegels geschlossen werden, . 
dass der Fahrer in diesem Moment den nickw^gen Ver- 
kehr betrachtet, also hinsichtlich des vorderen \ferkehrsge- 
15 schehens unaufmerksam ist. Umgekehrt lasst sich aus der 
Betatigung der Pedale fiir iGas, Bremse oder Gang auf eine 
hohe Aufmerksamkeit schlieBen, da dies im Regelfkll Hand- 
lungen sind, die in Abhangigkeit der erfassten Vericehrssi- 
tuation erfolgen. Gleiches gilt fiir pendehide Lenkwinkelbe- 
20 wegimgen, die auch auf eine hohe Aufmerksamkeit schlie^ 
Ben lassen. 

[0008] In einer weiteren bevorzugten Ausfiihrungsfonn 
werdra mindestens teilwdse die erfassten BetStigungssi- 
gnale in Abhangigkeit der Daten eines Sitzbelegungssensors 
25 gewichtet Der Grundgedanke dabei ist, dass bestirmnte Be- 
tatigungen auch von einem Beifahr^ erfolgen konnen, an- 
dere wiedenim nicht Wiid beispielsweise das Bremspedal 
und ein Bedienelement des Infotainments gleichzeitig beta- 
tigt, so kann angenommen werden, dass dear Beif ahr^ das 
30 Infotainment mit einer gewissen Wahrscbeinlichkeit betatigt 
hat, insbesondere da die gleichzeitige Betatigung des 
Bremspedals eher fiir eine hohe Aufmerksamkeit des Fah- 
rers spricht Wird hingegen das Bedienelement alleine beta- 
tigt, so spielt dies in einem gewissen Grade fiir eine Unauf- 
35 merksamkeit des Fahrers. Wud hingegen das Infotainment 
bedient und es ist kein Beifahrer vorhanden, so spricht dies 
eindeutig fiir einen unaufinerksamen Fahrer. Andererseits 
existieren Bedienelemente, wie beispielsweise Aufien- oder 
Ruckspiegel, die stets yom Fahrer selbst verstellt werden, so 
40 dass deren Betatigung unabhangig vom ^^rhandensein ei- 
: nes Beifahrers fur einen unaiifmerksamen Fahrer spricht 
[0009] Vorzugsweise ist das Fahrerassistenzsystem als au- 
tomatisches Notbremssystem oder als FahrspurkontroUsy- 
stem ausgebildet. 
45 [OOlO] Die Erfindung wird nachfolgend anhand eines be- 
vorzugten Ausfuhrungsbeispieles naher erlautert Die ein- 
zige Figur ieigt ein schematisches Blockschaltbild eines au- 
tomatischen Notbremssystems. . 

[0011] Das Notbremssystem 1 umfasst ein Steuergerat 2, 
50 mindestens einen Radarsensor 3 und einen Lidar-Sensor 41. 
Da5 Steuergerat 2 erhalt Betatigungssignale von einem 
Bremspedal 5, einem Gaspedal 6, einem Gangpedal 7, min- 
destens einem Bedienelement 8 eines Infotainmentsystems 
und einem Ruckspiegel 9 bzw. einem im Spiegelgelenk an- 
55 geordneten Sensor. Des weiteren erhalt das Steuergerat 2 die 
Geschwindigkeit V des Kraftfahrzeuges und ein Signal ei- 
nes Sitzbelegungssensors 10 des Beifahrersitzes mitgeteilt. 
Ausgangsseitig ist das Steuergerat 2 mit einem Brems-Steu- 
ergerSt 11 eines brake-by-wire-Systems verbunden, das . 
60 auch elektrisch mit dem Bremspedal 5 verbunden ist Der 
Radarsensor 3 und der Lidar-Sensor 4 Uefem kontinuierlich 
Daten an das Steuergerat, das hieraus Objekte und deren Ab- 
stand detektiert. Aufgrund der Eigengeschwindigkeit V 
kann dann die Geschwindigkeit des Objdctes anhand des 
65 Doppler-Effektes ermittelt werden. Aufgrund der Kenntnis 
da: maximalen Verzogerung kann das SteuergerMt 2 ermit- 
teln, ab welchem Zeitpunkt eine Kollision unvermeidlich 
ist, wobei Ausweichrouten zur Umf ahrung des Objektes be- 
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riicksichtigt werden. Bei der Berechnung des Zeitpunktes, 
wo der Abbremsvorgang spatestens dnsetzen musste und 
aucb die Reaktionszeit des Fahrers zu beriicksichtigen. 
Diese kann empirisch ermittelt werden, wobei diese auch 
vom Auftnerksamkeitszustand des Fahrers abhangig ist Um 5 
diese Reaktionszeit ist der Zeitpiinkt der unvermeidlichen 
Kollision nach vom zu verlegen. Prinzipiell konnte man 
stets mit der langsten Reaktionszeit rechnen. Dies wiirde je- 
docb dazu fiihren, dass haufig das automatische Notbrems- 
system bremsen wurde, obwohl der Fahrer selbst noch rea- 10 
gieren konnte. Derartig haufig und spurbar eingreifende 
Fahrassistenzsysteme werden aber von der Mehrzahl der . 
Kraftfahrzeugflihrer abgelehnt Um nun die Anzahl der un- 
notigen Eingriffe zu reduzieren, muss daher der Auftnerk- 
samkeitszustand und somit die Reaktionszeit des Fahrers 15 
abgeschatzt werden. 

[0012] Hierzu werden nun die Betatigungssignale der Be- 
dienelemente 5-9 sowie des Sitzbelegungssensors 10 ausge- 
wertet Dabei lassen sich vereinfacht folgehde Onippen auf* 
stellen: ; 20 

1) Der Fahrer ist immer unaufmerksam, wenn der 
Ruckspiegel 9 verstellt wird, da dieser dann immer den 
nickwartigen Verkehrsraum beobachtet. Des weiteren 
ist der Fahrer unauftnerksam, wenn dieser ein Bedien- 25 
element 8 des Infotainmentsystems bedient und kein 
Beifahrer vorhanden ist. 

2) Der Fahrer gilt als auftnerksam, wenn dieser eines 
der Pedale 5-7 betatigt und nicht die Bedienelemente 8 
Oder den Rttckspiegel 9 betatigt 30 

3) Der Fahrer ist vielleicht unaufmerksam, wenn die 
Pedale 5-7 betatigt werden und gleichzeitig das Be- 
dienelement 8 betatigt wird, wenn ein Beifahrer vor- 
handen ist. Gleiches gilt, wenn nur das Bedienelement 

8 bei vorfiandenem Beifahrer bedient wird. Dies kann 35 
beispielsweise durch dne mittlere Reaktionszeit zwi- 
schen auftnerksam und unaufmerksam benicksichtigt 
werden. Des weiter^ kann hier auch eine Fuzzy-Logik 
zur Anwendung kommen. 

40 

[0013] Kommt dann das Steuergerat 2 zti der Entschei- 
dung, dass eine Kollision unvermeidlich ist, so wird das 
Brems-Steuergerat U angesteuert und die automatische 
Notbremsung eingeleitet . . 

. . ■ • 45 

PatentansprQche 

1. Fahrerassistenzsystein, umfassend eine Sensorik 
zur Erfassung einer Fahrsituation, ein Steuergerat und 
eine Einrichtung zur Erfassung des Aufmericsamkeits- 50 
zustandes eines Kraftfahrzeugfiihrers, wobei das Steu- 
ergerat in Abhangigkeit der Daten der Sensorik und der 
Einrichtung zur Erfassung des Aufmerksamkeitszu- 
standes eines Kraftfahrzeugfiihrers eine Wameinrich- 
tungund/odereinen AktuatorzumEingrififindasFahr- 55 
verhalten des Kraftfahrzeuges ansteuert, dadurch ge- 
kennzejchnet, dass die Einrichtung zur Erfassung des 
Aufmerksamkeitszustandes Bedienelemente (5-9) vor- 
handener Fahrzeugkomponenten umfasst, aus deren 
Betatigung bzw. Nichtbetatigung das Steuergerat (2) 60 
einen Auftnerksamkeitszustand ableitet 

2. Fahrerassistenzsystem nach Anspruch 1, dadurch 
gekennzeichnet, dass die Fahrzeugkomponenten ein 
Bordcomputer und/oder ein Navigationssystem und/ 
Oder ein Autotelefon und/oder ein Infotainmentsystem 65 
und/oder ein Fahrzeugspiegel und/oder ein Schiebe- 
dach und/oder die Pedale fiir Gas, Bremse oder Gang 
sind. 



3. Fahrerassistenzsystem nach Anspruch 1 oder 2, da- 
durch gekennzeichnet, dass dem Steuezgerat (2) die 
Daten eines Sitzbelegungssensors (10) zufiihrbar sind 
und die Betatigungen d^ Bedienelemente in Abhan- 
gigkeit der Daten des Sitzbelegungssensors (10) ge- 
wichtet werden. 

4. Fahrerassistenzsystem nach einem der vorangegan- 
genen Anspriiche, dadurch gekennzeichnet, dass das 
Fahrerassistenzsystem afs automatisches Notbremssy- 
stem.(l) ausgebildet ist . • 
5: Fahrerassistenzsystem nach einem der Ansprtiche 1 
bis 3, dadurch gekennzeichnet, dass das Fahrerassi- 
stenzsystem als Fahrspurkontrollsystem ausgebildet 
ist 

6. Verfahren zur Erfassung des Aufmerksamkeitszu- 
standes eines Kraftfahrzeugfiihrers, dadurch gekenn- 
zeichnet, dass die Betatigung bzw. Nichtbet^gung von 
Bedienelementen (5-9) vorhandener Fahizeugkompo-' 
nentra erfasst wird und aus diesen ein Aufimerksam- 
keitszustand abgeleitet wird. 

7. Wrfahren zur Erfassung des Auftnerksamkeitszu- 
standes nach Anspruch 6, dadurch gekennzeichnet, 
dass die Betatigung der Bedienelemente in Abhangig- 
keit von den Daten eines Sitzbelegungssensors (10) ge* 
wichtet werdein. 
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